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基于 差分 的 动态 加 权 SVDD 在 多 模 态 过 程 故 障 检测 中 的 应 用 


谢 彦 红 *， 刘 文静 *， 李 元 ? 
(沈阳 化 工大 学 a 数理 系 ;b. 过 程 故障 诊断 研究 中 心 , 沈阳 110142) 


摘 要 : 现代 工业 生产 过 程 存在 多 种 运行 模 态 ， 数 据 序 列 之 间 具 有 很 强 的 相关 性 。 传 统 SVDD 作为 一 种 单 模 态 静态 故 
障 检 测算 法 ， 对 多 模 态 动态 过 程 故障 的 检测 难以 保证 其 检测 的 准确 性 和 实时 性 。 为 了 解决 这 一 问题 ， 提 出 一 种 基于 近 
邻 差 分 加 权 动 态 SVDD 检测 方法 (NND-DWSVDD) 。 首 先 ， 利 用 NND 别 除 数据 多 模 态 结构 ， 保 证 过 程 数据 服从 单 
峰 分 布 ; 然后 ， 对 差分 处 理 后 的 数据 引入 动态 ee 凸显 出 来 ; 最 后 ， 利 用 SVDD 方法 建立 监 
测 模型 实现 在 线 监 测 。NND-DWSVDD 提高 了 多 模 态 动态 过 程 故 障 检 测 率 。 对 于 多 模 态 动态 过 程 故障 检测 ，NND- 
DWSVDD 不 要 求 多 模型 建 模 ， 只 需 单独 的 一 个 模型 ， 符 合 MA 故障 检测 要 求 。 通 过 多 模 态 数值 例子 和 半导体 生产 过 
程 数据 对 该 方法 的 有 效 性 进行 验证 。 
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Application of dynamic weighted SVDD based on difference in multi-modal process 


Xie Yanhong?, Liu Wenjing?', Li Yuan? 
(a. Dept. of Mathematics & Physics, b. Process Fault Diagnosis Research Center, Shenyang University of Chemical Technology, 
Shenyang 110142, China. ) 


Abstract: There are many operating modes in modern industrial production processes, and there is a strong correlation between 
data sequences. Traditional SVDD as a single-mode static fault detection algorithm, it is difficult to ensure the accuracy and 
real-time performance of multi-mode dynamic process fault detection. In order to solve this problem, this paper propose a 
weighted dynamic SVDD monitoring method (NND-DWSVDD) base on nearest neighbor difference . First, use NND to 
eliminate the data multimodal structure and ensure that the process data obeys the unimodal distribution; then, introduce the 
dynamic method for the differentially processed data and add weights to highlight useful information. Finally, establish a 
monitoring model by using the SVDD method to achieve online monitoring. NND-DWSVDD improves the multi-modal 
dynamic process fault detection rate. For multimodal dynamic process fault detection, NND-DWSVDD does not require multi- 
model modeling, and only need a single model. It meet single-modal fault detection requirements. Through multi-modal 
numerical example and semiconductor production process data to validate the effectiveness of the method. 
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随 着 现代 工业 结构 的 日 趋 复杂 ， 对 生产 过 程 的 安全 性 和 可 过 去 时 刻 数 据 无 关 。 当 采样 时 间 间 隔 较 长 时 ， 这 种 假设 是 行 之 
的 要 求 也 日 益 增 加 0 。 对 运行 系统 进行 及 时 有 效 的 监控 ， 有 效 的 。 然 而 在 实际 工业 生产 中 ， 为 了 更 好 地 监视 生产 过 程 ， 
是 提高 工作 效率 和 保证 生产 安全 的 有 效 方法 1。 要 求 比 较 短 的 采样 时 间 间 隔 。 因此 , 探讨 适合 于 序列 相关 数 


据 


20 世纪 90 年 代 末 Tax 等 人 四 提出 了 支持 向 量 数据 描述 的 监测 方法 是 非常 有 必要 的 。 孙 彦 红 等 人 0 提出 基于 滑动 


口 


(SVDD) 方法 ， 该 方法 通过 非 线性 变换 将 低 维 空间 数据 映射 到 SVDD 的 故障 检测 方法 ， 通 过 采用 适当 大 小 的 滑动 窗口 逐步 更 
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特征 空间 中 建立 模型 ， 数据 无 服从 高 斯 分 布 的 要 求 ， 能够 新 当前 子 数据 空间 ， 改 善 了 由 于 数据 中 的 动态 特性 导致 的 检测 
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题 ，Duan 等 人 [2 提出 基于 SVDD 的 移动 机 器 人 内 部 传感器 故 
障 检测 方法 。 它 假定 只 有 正常 模型 的 样本 可 用 ， 所 提出 的 方法 
首先 基于 SVDD 为 这 些 正 常 样本 建立 一 个 紧 致 超 球体 , 然后 用 
所 得 超 球体 对 新 的 测试 数据 进行 验证 。 

最 近 几 年 ， 对 多 模 态 故障 进行 检测 的 研究 引起 学 者 们 广泛 
关注 。 在 多 模 态 问题 中 ， 每 种 模 态 的 数据 中 心 和 协 方差 都 有 很 
大 的 不 同 。 数 据 的 中 心 和 分 布 随 着 模 态 的 不 同 而 表现 出 很 大 的 
差异 。 传 统 的 SVDD 算法 作为 一 种 单 分 类 方法 无 法 对 多 模 态 的 
故障 进行 检测 。 为 了 解决 这 一 问题 ， 基 于 SVDD 的 多 模 态 故 障 
检测 方法 被 逐渐 发 展 起 来 。Wang 等 人 03] 提 出 了 一 种 基于 模糊 
聚 类 多 模型 的 推理 检测 方法 ， 用 于 搜索 过 程 数 据 的 最 佳 聚 类 中 
(^. Zhao 等 人 [4 提出 了 一 种 基于 支持 向 量 数据 描述 (SVDD) 
的 WLS 策略 的 新 算法 ， 对 多 模 态 数据 进行 标准 化 ， 消 除 采集 
到 的 数据 的 多 模特 征 ， 并 将 其 归 一 化 为 单 峰 数据 分 布 。Li 等 人 
05 提 出 了 一 种 基于 局 部 密度 比 加 权 支 持 向 量 数据 描述 CLDR- 
wSVDD ) 的 多 模式 过 程 故障 检测 方法 ， 以 解决 训练 样本 中 不 同 
密度 和 异常 值 的 多 模 态 过 程 监测 问题 。 

本 文 综合 考虑 了 采样 数据 间 的 序列 相关 性 以 及 存在 的 多 模 
态 、 多 工 况 问题 ， 提 出 一 种 基于 近邻 差分 的 加 权 动 态 SVDD 实 
时 在 线 多 模 态 故障 检测 方法 (NND-DWSVDD) 。 该 方法 不 仅 
解决 传统 SVDD 由 于 忽略 数据 间 的 序列 相关 而 导致 检测 效果 不 
佳 ,而 且 实现 了 SVDD 对 多 模 态 故障 进行 检测 的 目的 , 大 大 提高 
了 算法 的 检测 效率 和 检测 能 
1 SVDD 基本 理论 

支持 向 量 数据 描述 的 基本 思想 是 :将 数据 集 X={x,...,x,}， 
通过 非 线 性 转换 g 从 原始 空间 投影 到 高 维特 征 空间 ， 找 到 一 个 
几乎 包含 所 有 数据 样本 的 最 小 体积 超 球体 。a 是 超 球体 的 球 心 ， 
R 是 超 球体 的 半径 。 考 虑 测量 误差 或 者 噪声 等 干扰 引起 的 离 群 


IE 
Fl 


lm 


点 影响 ， 引 入 松弛 变量 ，C 是 惩罚 参数 。 此 问题 可 描述 为 
min(R* * CY c) 
did L6 (1) 


s tJ) -a SR? +6,6, 20 


上 述 问题 可 以 转换 为 解决 相应 的 对 侦 问题 : 


L- Ža, (D(x) e (x,)) -> aa; (Dx) e b(x;)) 


Q) 
st) a, -LOso;xC 


其 中 : a 是 拉 格 朗 日 因子 。 
用 核 函数 K (xi xj) RENER (Dx) D(x)) 来 实现 低 维 空间 
的 非 线性 向 高 维 空间 的 线性 问题 的 转换 ， 可 得 


maxL = Ya, x) i Y aa, x5) 3) 
n Lj 


En 


利用 二 次 规划 , 可 以 求 出 w o WRO a, «o, WHH HER 
数据 在 超 球面 上 ， 此 时 该 点 为 支持 向 量 ; 如 果 w =0， 则 说 明 目 
标 数据 在 超 球 体内 。 如 果 z 是 支持 向 量 ， 则 超 球 体 的 半径 和 球 


谢 彦 红 ， 等 : 基于 差分 的 动态 加 权 SVDD 在 E 仿 测 中 的 局 


A E tr 


R= 1-2 a K(zx)t Saa, KG,x)) 
i Lj 


(4) 
a- Y ax) 


对 于 新 的 样本 x ，， 其 到 超 球 球 心 的 距离 可 表示 为 


Do zi | 7 25 oO X; ) B Y aa, i x) (5) 
i ij 


2 ”基于 差分 方法 的 动态 加 权 SVDD 


对 于 传统 的 SVDD 算法 , 当 训 练 数据 中 存在 多 模 态 结构 时 ， 
不 能 满足 单 模 态 建 模 的 条 件 ，SVDD 的 检测 性 能 将 不 可 避免 地 
受到 影响 。 尤其 是 当 多 种 模式 之 间 出 现 故 障 时 , SVDD 的 检测 
效果 更 不 理想 。 为 了 提高 SVDD 对 多 模 态 动态 数据 检测 能 力 ， 
本 章 介绍 差分 数据 预 处 理 技术 及 动态 加 权 方 法 。 
2.1 近邻 差分 (nearest neighbors difference, NND) 

Zhang 等 人 49 提出 近邻 差分 的 方法 ， 其 基本 原理 是 : 假设 
原始 数据 集 yen 包含 y NRN Cn 表示 样本 数量 ，m 表示 测 
量变 量 的 数量 ) ; x 的 第 一 个 邻居 是 x* ， 通 过 比较 样本 x 到 其 
他 样本 的 欧 氏 距离 来 确定 x o 
首先 , 样本 x 在 训练 集中 找到 其 最 近邻 样本 xw* ， 然 后 利用 


X (6) 进行 一 阶 差分 运算 。 


£-2x-x (6) 

为 了 解决 由 于 方差 不 同 导致 的 数据 分 布 不 均 的 问题 ， 本 文 
计算 二 阶 差分 同时 引入 权重 参数 ， 式 〈6) 转换 为 式 (7) 。 

X-w*(&-E) (7) 

Kr: wsi -ie EX x-2[x 1,2, 为 差分 和 矩阵。 正常 

TOL. BTE s 与 其 最 近邻 入 在 空间 中 的 位 置 接近 ， 所 以 


差 值 会 分 布 在 原点 的 周围 。 
2.2 动态 加 权 
在 动态 系统 中 ， 当 前 时 刻 的 数据 取 诀 于 过 去 时 刻 的 数值 ， 
因此 需要 了 解 当前 时 刻 与 过 去 时 刻 之 间 的 关系 。 由 之 前 的 2.1 
节 已 经 得 到 差分 处 理 后 的 单 模 态 数据 这 =[ 富 x ss xU 
增加 前 户 时 刻 观 测 数据 得 到 增 广 矩阵 : 
x bE i Lu 
X= EI 4s T (8) 
fus ien dbi nra 
其 中 : 知 是 z 时 刻 疡 维 观测 变量 的 集合 ;大 为 时 滞 长 度 ， 通 党 
采用 平行 分 析 法 来 计算 滞后 长 度 . 为 了 降低 复杂 度 和 运行 时 间 ， 
将 增 广 矩阵 作 如 下 处 理 
x 
X(h)- Xi (9) 
M 
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为 了 将 变量 中 有 用 的 信息 凸显 出 ， 本 文 将 给 出 一 个 权 值 矩 
阵 W ， 县 体 计算 公式 如 下 
wA) liy con 
$ std(X(h)„) 
325. 
W 
W = diag w (0) 
W, 
则 加 权 后 的 矩阵 变 为 
X hy = XU0xW Q1) 


其 中 ， sa (Q9) 是 训练 数据 第 r PERRINE: BER w 
是 一 个 对 角 和 矩阵。 在 采集 的 数据 中 如 果 变 量 包含 较 多 的 信息 ， 
就 给 这 个 变量 赋予 一 个 较 大 的 权 值 ， 反 之 就 赋予 一 个 较 小 的 权 
值 。 经 过 加 权 ， 重 要 的 信息 的 到 突出 显示 。 


3 ”基于 近邻 差分 加 权 动 态 SVDD 故障 检测 


为 了 解决 工业 生产 过 程 中 存在 的 多 模 态 问题 ， 本 文 提 出 一 
种 基于 NND-DWSVDD 故障 检测 方法 。 首 先 ， 通 过 NND 方法 
预 处 理 多 模 态 数据 ， 保 证 数据 服从 多 峰 分 布 ， 其 次 ， 对 差分 后 
的 单 模 态 数据 引入 动态 方法 解决 数据 间 存 在 的 互相 关 及 自 相关 
性 ， 然 后 ， 对 动态 数据 加 入 权重 因子 将 重要 的 信息 突出 显示 ; 
最 后 ， 建 立 SVDD 检测 模型 对 新 来 的 数据 进行 故障 检测 。 下 大 


介绍 NND-DWSVDD 算法 的 建 模 和 故障 检测 步 又， 如 图 1 所 
DE 


个 同 运 行 模 态 下 的 | | 对 于 一 个 新 的 测试 样本 
单 本 作为 训练 样本 集 
yum 


Xnew 


找到 X™™ 中 每 个 样本 的 在 训练 样本 中 寻找 其 最 
最 近邻 进行 差分 运算 得 近邻 样本 与 其 进行 差分 
到 区 运算 得 到 ew 


对 差分 矩阵 X 引 入 动态 方 
法 加 入 权 值 因子 


对 和 ew 引入 动态 方法 加 
入 权 值 因 子 W ew 


应 用 SVDD 建 立 检测 模型 
计算 控制 限 R 


X (5) 计算 Zew 到 
球 球 心 距离 Dist 


gi El 


Xnew 是 一 个 故障 


E 
H 


图 1 建 模 及 检测 流程 
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4 ”仿真 和 分 析 


为 了 检验 理论 的 可 行 性 , 在 这 本 章 中 将 传统 的 SVDD 方法 
与 本 文 新 提出 的 NND-DWSVDD 方法 同时 进行 数值 多 模 态 例 
子 和 半导体 过 程 数据 仿真 实验 ， 实 验 结果 及 分 析 也 将 会 同时 给 
出 。 
43 数值 例子 

Ge 等 人 0 提出 了 一 个 典型 的 多 模 态 模型 ， 很 多 学 者 用 此 
模型 检测 算法 对 复杂 数据 的 有 效 性 ， 本 文采 用 此 模型 来 验证 
NND-DWSVDD 算法 效果 ， 模 型 的 结构 如 式 12) 所 示 。 


X=0.5768s, +0.3766s, +e, 
x, =0.7382s,” +0.0566s, +e, 
x, — 0.82915, 4- 0.40095," + e 
x, — 0.6519s,s, -- 0.20705, + e, 
Xs — 0.39725, + 0.80455, + e, 


(12) 


BUUEECRAAERE x. no nouo ye s 和 ss 是 潜在 变 

es es 6s er e 是 五 个 相互 独立 的 噪声 ， 均 服从 均值 

为 0、 标 准 差 为 0.01 的 高 斯 分 布 。 两 个 设计 的 模 态 如 下 所 示 : 
modell s, uniform(—10,7) 


二 


s, N(-15,]) 
model2 s, uniform(2,5) (13) 
s, N(7,1) 
两 种 模 态 下 分 别 产 生 400 个 样本 组 成 正常 训练 样本 集 。 两 
个 测试 样本 集 由 式 〈12) 产生 。 


设 定 以 下 故障 ; 

a) 系统 运行 在 模 态 1 F, T=401 时 刻 起 给 x, 加 一 个 幅 值 
为 4 的 阶 跃 信 号 。 

b) 系统 运行 在 模 态 1 TF. T = 401 时 刻 起 给 X 加 一 个 幅 值 
为 0.02 的 斜坡 信号 。 

为 了 更 清楚 地 观察 差分 处 理 多 模 态 数据 能 力 ， 本 文 将 给 出 
正常 数据 和 故障 数据 经 差分 处 理 前 后 变量 x 、x, 高 斯 分 布 直方 
图 。 图 2 为 SVDD 经 Z-SCORE 标准 化 后 数据 分 布 ， 图 3 为 
NND-DWSVDD 经 NND 差分 后 的 数据 分 布 。 通 过 两 张 对 比 图 
可 以 清楚 地 看 到 NND 处 理 多 模 态 数据 的 能 力 。 


i 


; á | 171 
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图 2 经 z-score 处 理 
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图 3 经 NND 处 理 
上 一 步 的 差分 处 理 已 经 得 到 单一 模 态 下 的 数据 ， 处 理 了 


互相 关 问 题 ， 接 下 来 将 继续 研究 数据 的 动态 特性 也 就 是 自 相关 
问题 ， 通 过 加 权 方 法 将 重要 的 信息 突出 显示 解决 了 不 同 变 量 间 


线性 关系 。 为 了 便于 观察 也 将 给 出 图 像 ， 如 图 4、5 所 示 。 
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图 5 加权 处 理 后 的 自 相关 检验 
图 6、7 为 两 种 方法 对 两 种 故障 的 检测 结果 。 


检测 图 可 以 


看 出 ， 当 阶 跃 故障 发 生 在 两 个 模 态 之 间 时 ，SVDD 几乎 不 能 检 


测 出 故障 。 原 因 是 既 没 有 SVDD 考虑 到 数据 的 自 相 关 性 问题 ， 


也 没有 没有 考虑 数据 的 互相 关 性 即 多 模 态 问题 。 在 数据 处 理 阶 
段 利 用 Z-SCORE 方法 处 理 数 据 ， 当 数据 处 于 同一 分 布 时 ， 这 
种 方法 是 有 效 的 ; 但 当 故 障 发 生 在 多 个 模 态 之 间 时 ，Z-SCORE 


方法 由 于 本 身 算 法 的 影响 不 能 剔除 数据 多 横 态 结构 ，SVDD 在 
建 模 阶 段 建立 的 模型 较 大 ， 在 检测 时 会 将 故障 当做 正常 数据 包 
在 球 内 。NND-DWSVDD 在 数据 处 理 阶段 就 能 够 剔除 数据 的 多 
模 态 结构 ， 并 且 在 引入 权 值 因子 将 重要 的 信息 加 以 突出 显示 ， 

保证 了 SVDD 能 够 建立 适当 的 单 模 态 模型 . 当 发 生 和 斜坡 故障 时 ， 
对 故障 的 检测 都 会 发 生 延 迟 现象 , NND-DWSVDD 在 延迟 时 间 
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上 明显 较 之 SVDD 有 所 减少 ,这 也 为 故障 的 及 时 发 现 打下 基础 ， 
能 够 在 一 定 程度 上 减少 生产 损失 。 
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42 半导体 过 程 
本 文 所 应 用 的 半导体 数据 0 引 来源] 
半导体 生产 过 程 实际 数据 。 半 导体 生产 过 程 数据 


" 


国 德州 仪器 公司 的 
3 个 模 态 108 


个 正常 硅 片 和 21 个 故障 硅 片 构成 。 由 于 2 个 批 次 过 程 (第 56 
个 正常 批 次 和 第 12 个 故障 批 次 ) 丢失 大 量 的 数据 , 所 以 实际 的 


批 次 为 107 批 正常 数据 和 20 批 故 障 数据 。 
中 ，1 一 34 批 次 为 第 一 模 态 ; 35—66 批 次 为 第 二 模 态 ; 


在 107 个 正常 批 次 


71—107 


批 次 为 第 三 模 态 。 原 始 数据 集 包 含 40 个 变量 。 


在 该 实验 rH, 从 


40 个 测量 变量 中 选取 17 个 变量 作为 检测 变量 , 随机 
正常 批 次 为 建 模 数据 ， 选 取 6 正常 批 次 为 校 验 数据 ， 
为 20 个 。 每 个 批 次 是 不 等 长 的 ， 持 续 


zER 
E 
Su 


用 最 短 长 度 法 。 
且 使 点 对 
性 降低 。 为 了 提高 不 等 长 间歇 过 程 故 障 诊断 的 | 


这 种 方法 简单 ， 但 数据 多 


由 取 96 个 


故障 批 次 


支 时 间 在 95 一 112 s 变化 。 
决 间 葡 过 程 批 次 不 等 长 问题 ， 传 统 的 统计 分 析 方 法 通常 
L 迹 的 过 程 信息 
点 数据 的 相关 性 降低 ， 导 致 数据 的 可 靠 


了 统计 模 量 分 析 算 法 对 多 模 态 数据 进行 预 处 理 09， 
特征 将 会 组 合成 一 个 (Lx 2m) 维 
行 差分 运算 ， 最 后 对 所 得 


所 有 的 统计 
的 特征 向 量 , 然后 对 统计 模 量 进 
到 的 统计 差分 数据 矩阵 计算 相应 的 统 


计量 值 并 与 控制 限 进行 比较 ， 判 断 检测 结果 。 其 过 程 引 


n a 


IR: 

对 于 一 个 有 n 个 样本 m 变量 的 批 次 IT，， 
量 的 均值 和 方差 , 然后 定义 SP 向 量 , SP=[C,V]， 
HÆ, y 是 一 个 方差 向 量 。 
图 8 为 SVDD 方法 对 21 批 
SVDD 由 于 利用 
的 影响 ， 也 没有 考虑 数 ] 
检测 不 ; 


esl 


BHS 


故障 数据 的 检测 结果 。 
Z-SCORE 方法 标准 化 数据 ， 没 有 考虑 多 模 态 
相关 性 ， 导 致 对 产生 的 故障 数据 
Emi. 图 9 为 NND-DWSVDD 方法 对 故障 数据 


， 单 独 计算 每 个 变 
C 是 一 个 均值 


传统 的 


的 检测 结 


3t. NND-DWSVDD 方法 考虑 数据 的 分 布 特性 ， 
竺 阶段 已 经 将 多 模 态 去 除 ， 为 后 


在 前 其 
检测 打下 基础 ， 之 后 引入 动 


数据 处 


态 加 权 方 法 ， 利 用 权 值 因子 将 重要 的 信息 突出 显示 ， 
数据 的 自 相 关 性 ， 
故障 的 检测 结果 如 表 1 所 示 。 


E 
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同时 去 除 


步 保 证 检测 的 有 效 性 。 两 种 算法 对 20 HE 
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Z9. NND-DWSVDD 检测 结果 
dl 两 种 算法 对 20 批 故 障 的 检测 结果 /9% 
算法 SVDD NND-DWSVDD 
故障 检测 率 76 
5 结束语 


针对 SVDD 方法 对 工业 生产 出 现 的 多 模 态 故障 检测 效果 不 


里 想 的 问题 ， 


本 文通 过 分 析 数 据 的 空间 分 布 及 相关 性 ， 提 出 基 


于 NND-DWSVDD 算法 的 多 模 态 工业 过 程 故障 检测 方法 。 该 方 


法 首先 运用 近邻 差分 对 数据 进行 处 理 ， 剔 除 由 于 中 心 不 同 而 存 
在 的 多 模 态 形式 ， 其 次 对 差分 后 的 单 模 态 数据 引入 动态 方法 去 


除数 据 的 自 相 关 性 确保 数据 之 间 不 会 相互 影响 ， 最 后 应 用 
SVDD 方法 实现 在 线 监 测 。 
善 了 SVDD 不 能 


相 比 SVDD，NND-DWSVDD 在 改 
理 多 模 态 问题 的 同时 又 考虑 数据 的 自 相 关 


性 。 
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